eval_batch_size:13107200, generate_setting:original, learning_rate:0.001, model:Observation, setting:merge, train_batch_size:4096
Valid result:
recall@5 : 0.0532    recall@10 : 0.0784    recall@20 : 0.1064    recall@50 : 0.173    mrr@5 : (0.0342+0j)    mrr@10 : (0.038+0j)    mrr@20 : (0.0402+0j)    mrr@50 : (0.0426+0j)    ndcg@5 : (0.0371+0j)    ndcg@10 : (0.0455+0j)    ndcg@20 : (0.0528+0j)    ndcg@50 : (0.0666+0j)    hit@5 : 0.0617    hit@10 : 0.0903    hit@20 : 0.1229    hit@50 : 0.1985    precision@5 : 0.0127    precision@10 : 0.0094    precision@20 : 0.0065    precision@50 : 0.0042
Test result:
recall@5 : 0.0491    recall@10 : 0.0704    recall@20 : 0.1108    recall@50 : 0.1731    mrr@5 : (0.0334+0j)    mrr@10 : (0.0366+0j)    mrr@20 : (0.0397+0j)    mrr@50 : (0.0419+0j)    ndcg@5 : (0.0351+0j)    ndcg@10 : (0.0421+0j)    ndcg@20 : (0.0525+0j)    ndcg@50 : (0.0655+0j)    hit@5 : 0.0589    hit@10 : 0.083    hit@20 : 0.1285    hit@50 : 0.2001    precision@5 : 0.0121    precision@10 : 0.0086    precision@20 : 0.0067    precision@50 : 0.0043

eval_batch_size:13107200, generate_setting:original, learning_rate:0.001, model:Observation, setting:source_passing, train_batch_size:4096
Valid result:
recall@5 : 0.0527    recall@10 : 0.0803    recall@20 : 0.1131    recall@50 : 0.177    mrr@5 : (0.034+0j)    mrr@10 : (0.038+0j)    mrr@20 : (0.0405+0j)    mrr@50 : (0.0427+0j)    ndcg@5 : (0.0364+0j)    ndcg@10 : (0.0455+0j)    ndcg@20 : (0.054+0j)    ndcg@50 : (0.0671+0j)    hit@5 : 0.0622    hit@10 : 0.0934    hit@20 : 0.1311    hit@50 : 0.2031    precision@5 : 0.0129    precision@10 : 0.0098    precision@20 : 0.0069    precision@50 : 0.0043
Test result:
recall@5 : 0.049    recall@10 : 0.076    recall@20 : 0.1116    recall@50 : 0.173    mrr@5 : (0.0332+0j)    mrr@10 : (0.0371+0j)    mrr@20 : (0.0399+0j)    mrr@50 : (0.0421+0j)    ndcg@5 : (0.035+0j)    ndcg@10 : (0.0438+0j)    ndcg@20 : (0.0532+0j)    ndcg@50 : (0.0658+0j)    hit@5 : 0.0584    hit@10 : 0.0877    hit@20 : 0.1293    hit@50 : 0.1989    precision@5 : 0.0119    precision@10 : 0.0091    precision@20 : 0.0067    precision@50 : 0.0042

eval_batch_size:13107200, generate_setting:original, learning_rate:0.0005, model:Observation, setting:source_passing, train_batch_size:4096
Valid result:
recall@5 : 0.0207    recall@10 : 0.0324    recall@20 : 0.0483    recall@50 : 0.0874    mrr@5 : (0.0137+0j)    mrr@10 : (0.0154+0j)    mrr@20 : (0.0167+0j)    mrr@50 : (0.0182+0j)    ndcg@5 : (0.0147+0j)    ndcg@10 : (0.0186+0j)    ndcg@20 : (0.0227+0j)    ndcg@50 : (0.0309+0j)    hit@5 : 0.0237    hit@10 : 0.0373    hit@20 : 0.0565    hit@50 : 0.1042    precision@5 : 0.0047    precision@10 : 0.0038    precision@20 : 0.0029    precision@50 : 0.0022
Test result:
recall@5 : 0.0272    recall@10 : 0.0376    recall@20 : 0.0517    recall@50 : 0.0837    mrr@5 : (0.0174+0j)    mrr@10 : (0.0191+0j)    mrr@20 : (0.0203+0j)    mrr@50 : (0.0215+0j)    ndcg@5 : (0.0193+0j)    ndcg@10 : (0.0228+0j)    ndcg@20 : (0.0266+0j)    ndcg@50 : (0.0333+0j)    hit@5 : 0.0293    hit@10 : 0.0425    hit@20 : 0.0589    hit@50 : 0.0983    precision@5 : 0.0059    precision@10 : 0.0043    precision@20 : 0.003    precision@50 : 0.0021

eval_batch_size:13107200, generate_setting:original, learning_rate:0.0005, model:Observation, setting:merge, train_batch_size:4096
Valid result:
recall@5 : 0.0213    recall@10 : 0.0346    recall@20 : 0.0495    recall@50 : 0.0894    mrr@5 : (0.0139+0j)    mrr@10 : (0.0159+0j)    mrr@20 : (0.0171+0j)    mrr@50 : (0.0186+0j)    ndcg@5 : (0.015+0j)    ndcg@10 : (0.0195+0j)    ndcg@20 : (0.0233+0j)    ndcg@50 : (0.0316+0j)    hit@5 : 0.0242    hit@10 : 0.0401    hit@20 : 0.0584    hit@50 : 0.106    precision@5 : 0.0048    precision@10 : 0.0041    precision@20 : 0.003    precision@50 : 0.0022
Test result:
recall@5 : 0.0279    recall@10 : 0.0384    recall@20 : 0.0522    recall@50 : 0.0859    mrr@5 : (0.0175+0j)    mrr@10 : (0.0192+0j)    mrr@20 : (0.0204+0j)    mrr@50 : (0.0217+0j)    ndcg@5 : (0.0196+0j)    ndcg@10 : (0.0232+0j)    ndcg@20 : (0.0268+0j)    ndcg@50 : (0.0339+0j)    hit@5 : 0.03    hit@10 : 0.0432    hit@20 : 0.0593    hit@50 : 0.1018    precision@5 : 0.006    precision@10 : 0.0044    precision@20 : 0.003    precision@50 : 0.0022

